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(57) Abstract: The invention relates to a method 
for image data processing, whereby object data 
of an image data set representing an image 
foreground (object data set) is separated from data 
set representing an image background (background 
data set), whereby a background to be recorded 
by a camera is changed into a frequency matching 
the recording frequency of the recording camera. 
—The— background- is— changed, for i n sta nce, — by~ 
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Ergebsb I Vnrnt (ffpaA 25^0 pre sec ) 
Otjcta wnrin i nrtr x w ya nc rt cod 



A. ..IN ADDfTION TO CAMERA PARAMETERS: FREQUENCY X*Y 

B. .. CONTROL BY PARAMETER 

C. .. PARAMETER : COLOR FREQUENCY BRIGHTNESS 

D. ..DIRECT CONTROL POSSIBLE 

E. ..CAMERA 1 TO N 

F. ..OBJECT 1 TO N 

G. ..BACKGROUND 

H. ..RECORDING OF OBJECT 1 TO N BY CAMERAS 
1 TO N INCLUDING BACKGROUND 

L.AZ IMAGES FROM N CAMERAS PER TIME UNITZ 

J ...EVALUATION UNIT 

K... RESULT 1 FRAME (TYPICALLY 25-30 PER SECOND) IN WHICH 
BACKGROUND AND THE OBJECT ARE SEPARATED 
SAID FRAME IS TIME-DELAYED BETWEEN 1 AND Z FRAME 

ein Kameraaufnahmesystem, insbesondere zur Durchfiihrung 



switching between two states or by gradually 
switching between two states having a plurality 
of intermediate states. The invention also relates 
to a camera recording system, especially for 
implementing the inventive method, comprising 
at least one camera for recording an object located 
in front of a background, whereby the background 
is changed into a frequency matching the recording 
frequency of the recording camera. 



(57) Zusammenfassung: Verfahren zur 

Bilddatenverarbeitung, bei dem eine Trennung von 
einen Bildvordergrund darstellenden Objektdaten 
eines Bilddatensatzes (Objektdatensatz) von einem 
einen BUdhintergrund darstellenden Datensatz 
(Hintergrunddatensatz) erfolgt, bei dem ein von 
einer Kamera aufzunehmender Hintergrund in einer 
auf eine Aufnahmefrequenz der aufhehmenden 
Kamera abgestimmten Frequenz geandert wird. Die 
Anderung des Hintergrunds erfolgt beispielsweise 
"THE durch Umschalten zwischen zwei Zustanden 

oder graduell zwischen zwei Zustanden mit einer 
Vielzahl von Zwischenzustanden. Des weiteren ist 
des erfindungsgemassen Verfahrens 

[Fortsetzung auf der nachsten Seite] 
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mit mindestens einer Kamera zur Aufnahme eines vor einem Hintergrund befindiichen Objekts beschrieben, wobei eine Anderung 
des Hintergrunds in einer auf eine Aufnahmefrequenz der aufnehmenden Kamera abgestimmten Frequenz erfolgt 
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Verfahren zur Bilddatenverarbeitung 
und Kameraaufnahmesystem 

Die vorliegende Erfindung betrifft ein Verfahren zur Bild- 
datenverarbeitung, bei dem eine Trennung von einen Bildvor- 
dergrund darstellenden Objektdaten eines Bilddatensatzes 
von einem einen Bildhintergrund darstellenden Datensatz er- 
folgt, sowie ein Kameraaufnahmesystem, das insbesondere zur 
Durchfiihrung eines derartigen Verfahrens geeignet ist. 

Aus der Fernsehtechnik ist das sogenannte Blue -Box- Ver- 
fahren bekannt, bei dem eine den Hintergrund der aufzuneh- 
menden Einstellung bildende Flache als einfarbiger, insbe- 
sondere blauer Hintergrund ausgestaltet wird. Die Aufnahme 
eines Objektes vor diesem Hintergrund wird vor einer ersten 
Fernsehkamera bei einer Bildfrequenz von iiblicherweise 50 
bis 60 Halbbilder pro Sekunde aufgenommen, wahrend parallel 
dazu von einer zweiten Fernsehkamera ein den blauen Hinter- 
grund des ersten Bildes ersetzender Hintergrund, beispiels- 
weise einer Wetterkarte, aufgenommen wird. Die beiden par- 
allel auf genommenen Bildsequenzen werden in einem Mischer 
synchronisiert ubereinandergelegt , und der blaue Hinter- 
grundbereich wird durch das mit der zweiten Fernsehkamera 
aufgenommene Bild ersetzt. 

Bei dem sogenannten Blue-Box- Verfahren werden zwei prinzi- 
pielle Verfahren unterschieden, von denen ein erstes Ver- 
fahren auf einer Definition des Farbwerts beruht (die den 
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Hintergrund darstellende Farbe wird als durchsichtig defi- 
niert) , wahrend bei dem zweiten, gewerblich insbesondere 
von der Firma Ultimatte umgesetzten Verfahren eine Defini- 
tion des Hintergrunds uber die Konstanz der Helligkeit 
und/oder Sattigung des Farbraumes des Hintergrundes er- 
folgt . 

Der Vorteil der bekannten Verfahren liegt darin, dafi die 
Verarbeitung der analogen Bilddaten relativ einfach und in 
Echtzeit erfolgt. Als Nachteil ist f estzuhalten, daS der 
zumeist blaue, aber haufig auch griine Hintergrund sehr gut 
ausgeleuchtet sein mu£, denn die Farbe bzw. Helligkeit 
und/oder Sattigung der Farbe muS in der auf genommenen Bild- 
sequenz in hoher Qualitat sehr gleichmaSig sein, was nur 
durch eine hervorragende Ausleuchtung der den Hintergrund 
darstellenden farbigen Flache erreicht werden kann. Diese 
Ausleuchtung ist jedoch mit einem sehr grofien Auf wand ver- 
bunden, da die typische Einleuchtzeit fur ein Aufnahmestu- 
dio ca. eine Woche # oft sogar langer betragt. Abgesehen von 
der damit verbundenen Mannzeit wird sehr viel Strom ver- 
braucht und es entsteht eine fur die in der Auf nahmeumge- 
bung Tatigen unangenehm groSe Warme. Des weiteren wirkt 
sich nachteilig aus 7 da£ Sohatten und /oder Ref lexionen 
vermieden werden miissen, was das Ausleuchten zusatzlich er- 
schwert. Ref lexionen sind mit den bekannten Verfahren 
nicht, Schatten nur schwer : korrigierbar . 

Erf indungsgemalS werden dahingegen ein Verfahren zur Bild- 
datenverarbeitung mit den Merkmalen des Anspruchs 1 sowie 
ein Kameraaufnahmesystem mit den Merkmalen des Anspruchs 8 
vorgeschlagen . 
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Der Erfindung liegt der Gedanke zugrunde, dafi der Hinter- 
grund in einer auf die Aufnahmef requenz der auf nehmenden 
Kamera abgestimmten Frequenz definiert geandert wird. Unter 
Abstimmung ist hierbei zu verstehen, dag die Frequenz der 
Hintergrundanderung in einem bekannten Verhaltnis zu der 
Aufnahmef requenz steht. Es kann sich hierbei urn ein ganz- 
zahliges aber auch beliebiges Vielf aches der Aufnahmef re- 
quenz handeln. Die Auf nahmef requenz betragt vorzugsweise 
ein Vielf aches der Wiedergabef requenz, beispielsweise das 
Doppelte der ublichen Fernsehbildf requenz, also ca. 100 bis 
12 0 Halbbilder pro Sekunde. Grundsatzlich funktioniert das 
erf indungsgemaSe Verfahren, wie nachfolgend noch beschrie- 
ben wird, bei beliebigen Auf nahmef requenzen bis zu mehreren 
tausend Bildern pro Sekunde mit darauf abgestimmter Ande- 
rungsf requenz des Hintergrunds . Voraussetzung ist, dag sich 
der Inhalt (Vordergrund) zweier auf einanderf olgend aufge- 
nommener Bilder nicht oder zumindest nur unwesentlich an- 
dert, da jedes zweite Bild der Bildsequenz als Referenzbild 
verwendet wird. 

TSas"^r ndung sgemafie Ve r f ahr en "erdf fnet~die" Moglichkeit" des" 
Einsatzes digitaler Kameras und der Ausschopfung deren 
technischer Vorteile. Die Aufnahme einer Bildsequenz mit 
der beispielsweise doppelten Frequenz bei sich mit entspre- 
chend dieser Frequenz definiert anderndem Hintergrund fuhrt 
zu einer Sequenz von Bildpaaren, wobei sich die beiden je- 
weils ein Bildpaar bildenden Bilder (bei den ublichen Bewe- 
gung sges chwi nd i gke i t en auf genommener Objekte) bis auf den 
von einer Aufnahme zur nachsten definiert geanderten Hin- 
tergrund nicht oder kaum voneinander unterscheiden. Eines 
der beiden Bilder eines Bildpaares kann somit als Referenz- 
bild fur das jeweils andere Bild dienen. 
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Unter Ausnutzung der Vorteile der digitalen Auf nahmetechnik 
- jeder aufgenommene Bildpunkt (Pixel) eines Bildes kann 
mit dem entsprechenden Bildpunkt des darauf f olgenden Bildes 
direkt verglichen werden - werden die beiden Bilder eines 
Bildpaares miteinander verglichen, indem beispielsweise ein 
jeder Bildpunkt des Ref erenzbildes von dem entsprechenden 
Bildpunkt des anderen Bildes abgezogen wird. Wahrend sich 
als Resultat des Vergleiches fur das den Vordergrund der 
Aufnahme bildende Objekt bei Nichtanderung (nicht oder 
langsam bewegtes Objekt) Null bzw. nahezu Null und bei 
leichter Anderung (schnell bewegtes Objekt) ein von Null 
verschiedener willkiirlicher Wert ergibt, ergibt der Ver- 
gleich der Hintergrundf lachen einen vorbestimmten definier- 
ten Wert, da der Hintergrund von der Aufnahme des einen 
Bildes zum nachsten Bild gezielt definiert verandert wurde. 
Die Anderung des Hintergrunds kann durch Umschalten zwi- 
schen zwei Zustanden oder durch graduelles kontinuierli- 
ches, beispielsweise sinusf ormiges Oszillieren zwischen den 
beiden Zustanden erfolgen. 

Urn das den Vordergrund der Aufnahme bildende Objekt nun vom 
Hintergrund zu trennen, es sozusagen "auszuschneiden" , wer- 
den alle Bildpunkte, denen beim Vergleich der beiden ein 
Bildpaar bildenden Bilder ein definierter Inhalt zugeordnet 
wurde, unterdruckt und ggf . durch den Inhalt eines parallel 
aufgenommenen Bildes (beispielsweise der Wetterkarte) er- 
setzt. Die Quelle dieses zweiten Bildes ist beliebig. An- 
statt dem beschriebenen parallel aufgenommenen Bild kann 
auch ein Einzelbild (Festbild) als Hintergrund verwendet 
werden oder beispielsweise auch ein computergeneriertes 
Bild bzw. Bildsequenz. 
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In bevorzugter Ausgestaltung der Erfindung wird zur Ermitt- 
lung der Zuordnung eines Element es eines Kamerabilddat en- 
sat zes zu dem Obj ektdatensatz oder dem Hintergrunddatensatz 
ein Vergleich der Datensatze von zu einem unterschiedlichen 
Zeitpunkt innerhalb einer Wiedergabef requenz aufgenommenen 
Kamerabildern durchgef uhrt . Betragt die Aufnahmef requenz 
beispielsweise das Dreifache der spateren Wiedergabef re- 
quenz, so werden wahrend einer Wiedergabef requenz, d.h. in- 
nerhalb einer der Wiedergabef requenz entsprechenden Peri- 
ode, drei Kamerabilder aufgenommen. Diese drei Bilder wer- 
den zur Identif izierung eines beliebigen Elementes im Kame- 
rabild als Objekt oder Hintergrund miteinander verglichen. 
Der Vergleich erfolgt vorteilhaf terweise paarweise. So wird 
beispielsweise das erste Kamerabild dieser Abfolge von drei 
Bildern zunachst mit dem zweiten Bild und anschlieSend mit 
dem dritten Bild verglichen, und zuletzt wird das zweite 
Bild mit dem dritten Bild verglichen. Urn das Verfahren oko- 
nomischer zu gestalten, kann der Vergleich schrittweise 
durchgef uhrt werden, wobei nachgeordnete Vergleichsschritte 
nur durchgef uhrt werden, wenn die davor liegenden Ver- 
gleichsschritte noch kein eindeut iges Ergebnis lief ern, 
d.h. keine eindeut ige Einordnung des Kamerabildelements als 
Objekt oder. Hintergrund zulassen. 

In besonders bevorzugter Ausgestaltung ist der Vergleich 
eine Subtraktion von Elementen gleicher Koordinaten oder 
Bereiche der Kamerabilddatensatze, wobei die miteinander zu 
vergleichenden Elemente der Kamerabilddatensatze einzelne 
Pixel oder aber auch Pixelbereiche sein konnen. Als beson- 
ders vorteilhaf t erweist sich ein Vergleich von Pixelberei- 
chen, da das Verfahren dann schneller durchgefuhrt werden 
kann. Hier bietet es sich an, zunachst grofiere Pixelberei- 
che auszuwahlen, um diese dann gegebenenf alls schrittweise 
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in Unterbereiche zu unterteilen. Das erf indungsgemafie Ver- 
fahren eroffnet auch die Moglichkeit nicht nur zweidimen- 
sionale Pixelbereiche, sondern'auch n-dimensionale Pixelbe- 
reiche miteinander zu vergleichen. 

Wie bereits vorstehend erwahnt, kann das erf indungsgemaSe 
Verfahren bei beliebigen Aufnahmef requenzen bis zu mehreren 
tausend Bildern pro Sekunde . durchgefuhrt werden. Je hoher 
die Aufnahmef requenz, desto groSer ist die Anzahl der in- 
nerhalb einer Wiedergabeperiode auf genommenen Bilder mit 
unterschiedlichen Hintergrundzustanden (insbesondere Hin- 
tergrundhelligkeiten) , wodurch die Vergleichsmoglichkeiten, 
d.h. die Permutationen der Vergleichspaare, deutlich zuneh- 
men. Dadurch ist eine bessere Grundlage fur die Zuordnung 
eines Kamerabildelementes zu Hintergrunddatensatz oder Ob- 
jektdatensatz gegeben. 

Die Erfindung eroffnet daruber hinaus die Moglichkeit, bei 
einer hohen Auf nahmef requenz und gradueller Hintergrundsan- 
derung das Ref lexionsverhalten von Objekten im Kamerabild 
zu bewerten und daraus Ruckschlusse auf den Brechungs index 
und das Material des Objekts zu ziehen. Dies wiederum ge- 
stattet die Anpassung bet-rof f-ener Datensatzel entente des Ob- 
jektdatensatzes an den neuen, dem urspriinglichem Aufnahme- 
hintergrund ersetzenden Ersatzhintergrund. IM Gegensatz zu 
den aus dem Stand der Technik bekannten Verfahren ist somit 
erf indungsgemaS nicht nur eine Korrektur von Reflexionen 
(und Schatten) moglich, sondern auch deren Auswertung, urn 
die Erkennung von Objekt- oder Hintergrundzugehorigkeit ei- 
nes Bildelements oder die Anpassung des Bildes bzw. Objek- 
tes an einen eingesetzten Hintergrund zu ermoglichen. Somit 
konnen erf indungsgemaS Schatten und/oder Reflexionen auf 
dem Objekt bzw, dem Hintergrund erkannt und je nach Anwen- 
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dung oder Wunsch des Benutzers unterdruckt oder in anderer 
Art und Weise angepaSt und verarbeitet werden. 

Vorzugsweise erfolgt die die Durchfuhrung des erf indungsge- 
mafien Verfahrens unter Einsatz eines neuronalen Netzes oder 
anderer Methoden der sogenannten Kunstlichen Intelligenz 
(KI) . Damit wird eine besonders gute Erkennung und Zuord- 
nung der Bildelemente zu Objekt, Hintergrund, Spiegelung, 
Schatten, etc. erreicht . 

Schliefilich eroffnet die Erfindung die Moglichkeit, die Ka- 
merabilddatensatze nicht nur auf eine Zuordnung im zweidi- 
mensionalen Bereich (Objekt- und Hintergrundzugehorigkeit ) 
zu untersuchen, sondern auch weitere Inf ormationen uber das 
Objekt bzw. den Hintergrund, wie beispielsweise die Ge- 
schwindigkeit u.a., zu erhalten. Dies wiederum lafit Ruck- 
schliisse auf dreidimensionale Daten des Kamerabilddatensat- 
zes (Abstand von der Kamera etc.) zu, so daS die Erfindung 
nicht nur fur die zweidimensionale, sondern auch fur die 
mehrdimensionale Bilddatenverarbeitung geeignet ist. 



Weiterhin als vorteilhaft erweist es sich, den Auf nahmehin- 
tergrund wahrend der Aufnahme nur teilweise zu andern. 

Zur Durchfuhrung des erf indungsgemafien Verfahrens werden 
vorzugsweise folien- oder scheibenartige Elemente verwen- 
det, die gezielt sehr schnell optisch beeinfluSbar sind, 
d.h. deren Farbe und/ oder Keiiigkeit und/oder Sattigung in 
sehr kurzer Zeit von einem ersten vorgegebenen auf einen 
zweiten vorgegebenen Wert umgeschaltet werden kann. Hierzu 
eignen sich insbesondere elektrolumineszente oder auch 
elektrochrominante flachige Elemente, wie sie aus dem Stand 
der Technik bereits bekannt sind. 
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Weitere Vorteile und Ausgestaltungen der Erfindung ergeben 
sich aus der Beschreibung und der beiliegenden Zeichnung. 

Es versteht sich, daS die vorstehend genannten und die 
nachstehend noch zu erlauternden Merkmale nicht nur in der 
jeweils angegebenen Kombination, sondern auch in anderen 
Kombinationen oder in Alleinstellung verwendbar sind, ohne 
den Rahmen der vorliegenden Erfindung zu verlassen. 

Die Erfindung ist anhand eines Ausf uhrungsbeispieles in der 
Zeichnung schematisch dargestellt und wird im folgenden un- 
ter Bezugnahme auf die Zeichnung ausfuhrlich beschrieben. 

Figur 1 zeigt ein Blockschaltbild zur Veranschaulichung 
der Erfindung. 

Figur 2 zeigt ein Blockschaltbild zur Veranschaulichung 
einer in der vorliegenden Erfindung zu verwenden- 
den Auswerteeinheit . 

Zentraler Bestandteil der Erfindung ist die Aufnahme eines 
Oder mehrerer Objekte (Objekte 1 bis m) durch. eine oder 
mehrere Kameras (Kameras 1 bis n) , wobei sich die Objekte 
vor einem Hintergrund befinden. Der Hintergrund ist erf in- 
dungsgemaS hochfrequent beeinfluSbar bzw. anderbar. Die An- 
derungsfrequenz ist dabei auf eine Aufnahmef requenz der 
auf nehmenden Kamera(s) abgestimmt . Die Anderung des Hinter- 
grunds erfolgt insbesondere bezuglich dessen Farbe und/oder 
Helligkeit und/oder Sattigung. 

Die beeinf luSbaren Parameter des Hintergrunds sind somit 
neben der Anderungsf requenz die Farbe, die Helligkeit 
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und/oder die Sattigung. Bei der bzw. den Kamera(s) ist der 
beeinf luSbare Parameter neben den ublichen Kameraparametern 
die Aufnahmefrequenz, gegebenenf alls eingeschrankt auf ei- 
nen def inierbaren Bildbereich x*y. Diese Parameter werden 
von der Auswerteeinheit gesteuert, wobei auch eine direkte 
Steuerung, insbesondere zum Abgleich der Kamera(s) auf den 
Hintergrund, moglich ist. 

Mit den Kameras 1 bis n werden die durch den Hintergrund 
eingeschlossenen, d.h. von dem Hintergrund umgebenen Objek- 
te 1 bis m auf genommen, wobei die Aufnahmefrequenz der Ka- 
meras ein Vielf aches der spateren Wiedergabef requenz ist. 
Als Ergebnis liegen Az Kamerabilder von n Kameras pro 
Zeiteinheit z vor, die der in Figur 2 naher dargestellten 
Auswerteeinheit zugefuhrt werden. 

In der in Figur 2 dargestellten Auswerteeinheit ist fur je- 
de der 1 bis n Kameras eine eigene kamerabezogene Auswerte- 
einheit vorgesehen, der jeweils die Daten der Az Kamerabil- 
der zugefuhrt werden. Unter Be rucks ichtigung der ebenfalls 
jeder kamerabezogenen Auswerteeinheit zugefuhrten Zusatzpa- 
rameter, wie sie vorstehend beschrieben sind, werden in je- 
-der kamerabezogenen Auswerteeinheit das bzw . die Objekte 
von dem 4 Hintergrund getrennt, indem eine Identif ikation und 
eine Zuordnung einzelner Kamerabildelemente (Pixel oder Pi- 
xelbereiche) zu „Objekt w oder „ Hintergrund w erfolgt. Nach 
erfolgter Zuordnung werden die als dem Hintergrund zugeho- 
rigen Bildelemente entfernt und durch Bildelemente eines 
Ersatzhintergrunds ersetzt. In einfachen Anwendungen han- 
delt es sich bei diesem Ersatzhintergrund urn ein stehendes 
unveranderliches Bild, beispielsweise die Wetterkarte. Je- 
doch sind auch komplexere Anwendungen moglich und werden 
durch die vorliegende Erfindung erleichtert, wie beispiels- 
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weise das Einblenden von separat auf genommenen oder per 
Computer erzeugten laufenden Bildern als Hintergrund bei 
Studioaufnahmen. Der Ablauf der Identif ikation wurde vor- 
stehend bereits beschrieben. 

Die von den einzelnen kamerabezogenen Auswerteeinheiten er- 
zeugten Bilddaten werden dann einer zentralen auf nahmezeit- 
punktbezogenen Auswerteeinheit zugefuhrt, die einen Puffer 
zur Auswertung mehrerer Zeiteinheiten umfaSt und zur Syn- 
chronisierung und Abstimmung der von den kamerabezogenen 
Auswerteeinheiten gelieferten Daten dient. Die Verwendung 
mehrerer Kameras gestattet die Erzeugung von Bilddaten, die 
zu einer von einem Betrachter aus unterschiedlichen Per- 
spektiven betrachtbaren „dreidimensionalen" Wiedergabe ge- 
eignet sind. Ein derartiges Aufnahme- und Wiedergabeverf ah- 
ren ist beispielsweise in der deutschen Patentanmeldung 199 
13 853.2 beschrieben. 

Die von der zentralen aufnahmezeitpunktbezogenen Auswerte- 
einheit erzeugten Daten werden aus der Auswerteeinheit aus- 
gegeben, so daS als Ergebnis (vgl . Figur 1) ein Einzelbild 
(Frame) vorliegt, in dem der Hintergrund und das Objekt 
voneinander .aep.ari.ert sind. Eine typische Wiedergabef re- 
quenz der erzeugten Frames betragt ca. 25 bis 30 sec" 1 
(Fernsehbildf requenz) . 
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Patentanspruche 

1. Verfahren zur Bilddatenverarbeitung, bei dem eine 
Trennung von einen Bildvordergrund darstellenden Objektda- 
ten eines Bilddatensatzes (Objektdatensatz) von einem einen 
Bildhintergrund darstellenden Datensatz (Hintergrunddaten- 
satz) erfolgt, bei dem ein von einer Kamera auf zunehmender 
Hintergrund in einer auf eine Auf nahmef requenz der aufneh- 
menden Kamera abgestimmten Frequenz geandert wird. 

2. Verfahren nach Anspruch 1, bei dem die Anderung des 
Hintergrunds durch Umschalten zwischen zwei Zustanden er- 
folgt. 

3. Verfahren nach Anspruch 1, bei dem die Anderung des 
Hintergrunds graduell zwischen zwei Zustanden mit einer 
Vielzahl von Zwischenzustanden erfolgt. 

4. Verfahren nach einem der Anspruche 1 bis 3, bei dem 
die Farbe und/oder Helligkeit und/oder Sattigung des Hin- 
tergrunds geandert wird. 

5. Verfahren nach einem der Anspruche 1 bis 4, bei dem 
die Auf nahmef requenz der Kamera ein Vielf aches der Wieder- 
gabef requenz ist. 

6. Verfahren nach Anspruch 5, bei dem die Auf nahmef re- 
quenz das Doppelte der ublichen Fernsehbildf requenz ist. 
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7. Verfahren nach einem der Anspruche 1 bis 6, bei dem 
zur Ermittlung der Zuordnung eines Elementes eines Kamera- 
bilddatensatzes zu dem Objektdatensatz oder dem Hinter- 
grunddatensatz ein Vergleich der Datensatze von zu einem 
unterschiedlichem Zeitpunkt innerhalb einer Wiedergabef re- 
quenz aufgenommenen Kamerabildern durchgefiihrt wird. 

8. Verfahren nach Anspruch 7 , bei dem der Vergleich eine 
Subtraktion von Elementen gleicher Koordinaten oder Berei- 
che der Kamerabilddatensatze beinhaltet. 

9. Verfahren nach Anspruch 7 oder 8, bei dem die mitein- 
ander verglichenen Elemente der Kamerabilddatensatze Pixel 
sind. 

10. Verfahren nach Anspruch 8 oder 9, bei dem die mitein- 
ander verglichenen Elemente der Kamerabilddatensatze mehr 
dimensionale Pixelbereiche sind. 

11. Verfahren nach einem der Anspruche 1 bis 6, bei dem 
zur Erkennung und Zuordnung der Elemente der Kamerabild- 
datensatze Methoden der KunrStliohen Intelligent/ wie neuro- 
nal e Netze, verwendet werden. 

12. Verfahren nach einem der Anspruche 6 bis 11 # bei dem 
die als dem Hintergrunddatensatz zugehorig identif izierten 
Elemente des Kamerabilddatensatzes durch Elemente entspre- 
chender Koordinaten oder Bereiche eines Datensatzes eines 
Ersatzhintergrunds ersetzt werden. 

13 . Kameraauf nahmesystem, insbesondere zur Durchf uhrung 
des Verfahrens nach einem der Anspruche 1 bis 12, mit min- 
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destens einer Kamera zur Aufnahme eines vor einem Hinter- 
grund befindlichen Objekts, wobei eine Anderung des Hinter- 
grunds in einer auf eine Auf nahmef requenz der aufnehmenden 
Kamera abgestimmten Frequenz erf olgt . 

14. Kameraaufnahmesystem nach Anspruch 13, bei dem als 
Hintergrund ein optisch definiert beeinf luSbares folien- 
oder scheibenartiges Element vorgesehen ist. 

15. Kameraaufnahmesystem nach Anspruch 14, bei dem das Hin- 
tergrundelement ein elektrolumineszentes oder elektrochro- 
minantes flachiges Element ist. 
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other means 

"P* document pubfished prior to the international filing date but 
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a X* document of particular relevance; the claimed invention 
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involve an inventive step when the document is taken alone 
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EPO-Internal, WPI Data, INSPEC 



C. AtS WESEWTLICH ANGESEHENE UNTERLAGEN 



Kategorie* Bezeicrtnung der Verottentfichung. sowert erfordertteh unter Angabe der in Betracht komrnenden TeUe 



Befr. Anapruch Nr. 



p,x 



GB 2 343 078 A (DAISHO DENKI KK) 

26. April 2000 (2000-04-26) 

Seite 5, Zeile 20 -Selte 20, Zeile 21 

GB 2 321 565 A (BRITISH BROADCASTING CORP) 
29. Ouli 1998 (1998-07-29) 

Selte 7, Zeile 1 - Zeile 4 

Seite 15, Zeile 13 -Seite 16, Zeile 12 

Anspruche 18,19 

Abbildung 2 

EP 0 876 055 A (RT SET LTD) 
4. November 1998 (1998-11-04) 
SpaTte 6, Zeile 2 - Zeile 34 



1,2,4,7, 
8,12,13 



1,2,4,5, 

7-9,12, 

13 



1,13 
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Weitere Veroffentiichungen and der Fortsetzung von FeW C zu 
entnehmen 
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SieheAnhang Patentfamilie 



* Beeondere Kategohen von angegebenen Veroffentiichungen : 

•A* VeroffentJichung die den allgemeinen Stand der Technfk definiert 
aber nicht ate oesondere bedeutsam anzueehen tst 

'E* aJteree Dokument, das jedoch erst am oder nach dem intemationalen 
Anmeldedatum veroffentficht worden lat 

V Veioffsntljchung, cSe gpeignet ist. einen Prforitatsansoruch zwetfelhaft er- 
echeinen zu tasaen. oder durch die daa Veroffentilchungedatum einer 
anderen im Recherchenbericht genannten Verofterititehung beJegt werden 
eofl oder die auaeinem anderen beeonderen Grund angegeben 1st (wie 
ausgefuhrt) 

■O* VeroffentJichung, die steh auf eine mundfche Offenbarung, 

eine Benutzung, eine Ausstellung oder andere MaBnahmen bezieht 

•P* Veroffentiichung, die vor dem fntemationaien Anmektedatum, aber nach 
dem beansptuchten Prioritatedatum veroffentticht worden iat 



T* Spatere Veroffentiichung, die nach dem intemationalen Anmeldedatum 
oder dem Prtoritatedatum veroffentticht worden ist und mit der 
AnmeWung nicht koQidiert, sondem nur zum Verstandnia dee der 
Erftndung zugrundeliegenden Prinzipe oder der ihr zugrundeliegenden 
Theorie angegeben tst 

'X* Veroffentiichung von beeonderer Bedeutung; die beanepruchte Erflndung 
kann ailein auf grund cfieeer VeroffentJichung nicht ate neu oder auf 
erfinderiecher Tatigkeit beruhend betrachtet werden 

"Y" Veroffentiichung von beeonderer Bedeutung; die beanepruchte Erfindung 
kann nicht ate auf erfinderiecher Tatigjcett beruhend betrachtet 
werden, wertn die Veroffentiichung mit einer oder mehreren anderen 
Veroffentiichungen cbeaer Kategorie in Verbindung gebracht wird und 
dieee Verbindung fur einen Fachmann nahettegend ist 

*V Veroffentiichung. die Mitglied dereeiben Patentfamilie ist 



Datum dee Abechlussee der intemationalen Recherche 



9. Oktober 2000 



Abaendedatum dee intemationalen F 



16/10/2000 



Name und Postanschrift der international en Recherchenbehorde 
EuropaJsches Patentamt, P.B. 5618 Patentiaan 2 
NL-2280HVRijswijk 
Tel. (431-70) 340-2040. Tx. 31 651 epo ni, 
Fax: (431-70) 340-3016 



Bevoiimachtigter Bedensteter 



Uentzel , J 



ForniWat! PCTMSA/210 (Biatt 2) (JuD 1992) 



INTERNATIONAL^ pLCHERCHENBERICHT 

Angaben zu Veroftentflchungen, die zur aelben PatenttemOte gehdren 



nan as Aktenzeichen 

PCT/EP 00/06827 



Datum der 


MitgliecKer) der 


Datum der 


Ver6ffent(ichung 


Patentfamilie 


Vetfifforitfichung 



lm Recherchenbericht 
angefuhrtes Paten tbokument 



Gt 2343078 



26-04-2000 



JP 2000069498 A 



03-03-2000 



GB 2321565 


A 


29-07-1998 


GB 


2321814 A 


05-08-1998 






GB 


2338367 A 


15-12-1999 


EP 0876055 


A 


04-11-1998 


CA 


2230430 A 


01-10-1998 



Fambiatt PCT/1SA/210 (Anhang PatafTtfamiteMJul 1992) 



VERTRAG UBER ^INTERNATIONALE ZUSAI^EN ARBEIT AUF DEM 

^iEBIET DES PATENTWESe!!? 



PCT 

INTERNATIONALER VORLAUFIGER PRUFU 

(Artikel 36 und Regel 70 PCT) 




Aktenzeichen des Anmelders Oder Anwalts 
225 002 P-WO 


weiTCDce wAnrcucM slehe Mittei,un 9 "ber die Ubersendung des intemationalen 
Wfcl 1 tHtb VOHGcHEN vorlaufigen Prufungsberichts (Formblatt PCT/IPEA/416) 


Internationales Aktenzeichen 
PCT/EP00/06827 


Internationales AnmeldedatumrTa^onafcUarir; 
17/07/2000 


Prioritatsdatum (Tag/Monat/Tag) 
15/07/1999 



H04N5/272 



Anmelder 

SETZER, Steffen et al. 



1 . Dieser Internationale vorlauf ige Prufungsbericht wurde von der mit der intemationalen vorlaufigen Prufung beauftragten 
Behorde erstellt und wird dem Anmelder gemaB Artikel 36 ubermittelt. 



2. Dieser BERICHT umfaGt insgesamt 5 Blatter einschlieBlich dieses Deckblatts. 

□ AuRerdem liegen dem Bericht ANLAGEN bei; dabei handelt es sich urn Blatter mit Beschreibungen, Anspruchen 
und/oder Zeichnungen, die geandert wurden und diesem Bericht zugrunde liegen, und/oder Blatter mit vor dieser 
Behorde vorgenommenen Berichtigungen (siehe Regel 70.16 und Abschnitt 607 der Verwaltungsrichtlinien zum PCT) 

Diese Anlagen umfassen insgesamt Blatter. 



3. Dieser Bericht enthalt Angaben zu folgenden Punkten: 

I S Grundlage des Berichts 
Prioritat 

Keine Erstellung eines Gutachtens uber Neuheit, erfinderische Tatigkeit und gewerbliche Anwendbarkeit 
Mangelnde Einheitlichkeit der Erfindung 

Begrundete Feststellung nach Artikel 35(2) hinsichtlich der Neuheit, der erfinderischen Tatigkeit und der 
gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 
Bestimmte angefuhrte Unterlagen 
Bestimmte Mangel der intemationalen Anmeldung 
Bestimmte Bemerkungen zur intemationalen Anmeldung 



II 


□ 


III 


□ 


IV 


□ 


V 


ISI 


VI 


□ 


VII 




VIII 


□ 



Datum der Einreichung des Antrags 



08/02/2001 



Datum der Fertigstellung dieses Berichts 
16.10.2001 



Name und Postanschrift der mit der intemationalen vorlaufigen 
Prufung beauftragten Behorde: 

Europaisches Patentamt 

D-80298 Munchen 
Tel. +49 89 2399 - 0 Tx: 523656 epmu d 

Fax: +49 89 2399 - 4465 



Bevollmachtigter Bediensteter 
Brandenburg, J 

Tel. Nr. +49 89 2399 8027 



Formblatt PCT/IPEA/409 (Deckblatt) (Januar 1994) 



INTERNATIONALER VORLAUFIGER 
PRUFUNGSBERICHT Internationales Aktenzeichen PCT/E POO/06827 



I. Grundlage des Berichts 

1 . Hinsichtlich der Bestandteile der internationalen Anmeldung (Ersatzblatter, die dem Anmeldeamt auf eine 
Aufforderung nach Artikel 14 hin vorgelegt warden, gelten im Rahmen dieses Berichts als "ursprunglich 
eingereicht" und sind ihm nicht beigefugt, weil sie keine Anderungen entha/ten (Regeln 70. 16 und 70. 1 7)): 
Beschreibung, Seiten: 

1-10 ursprungliche Fassung 



Patentanspriiche, Nr.: 

1-15 ursprungliche Fassung 

Zeichnungen, Blatter: 

1 -2 ursprungliche Fassung 



2. Hinsichtlich der Sprache: A lie vorstehend genannten Bestandteile standen der Behorde in der Sprache, in der 
die internationale Anmeldung eingereicht worden ist, zur Verfugung oder wurden in dieser eingereicht, sofern 
unter diesem Punkt nichts anderes angegeben ist. 

Die Bestandteile standen der Behorde in der Sprache: zur Verfugung bzw. wurden in dieser Sprache 
eingereicht; dabei handelt es sich um 

□ die Sprache der Ubersetzung, die fur die Zwecke der internationalen Recherche eingereicht worden ist (nach 
Regel 23.1(b)). 

□ die Veroffentlichungssprache der internationalen Anmeldung (nach Regel 48.3(b)). 

□ die Sprache der Obersetzung, die fur die Zwecke der internationalen vorlaufigen Prufung eingereicht worden 
ist (nach Regel 55.2 und/oder 55.3). 

3. Hinsichtlich der in der internationalen Anmeldung offenbarten Nucleotid- und/oder Aminosauresequenz ist die 
internationale vorlaufige Prufung auf der Grundlage des Sequenzprotokolls durchgefiihrt worden, das: 

□ in der internationalen Anmeldung in schriftlicher Form enthalten ist. 

□ zusammen mit der internationalen Anmeldung in computerlesbarer Form eingereicht worden ist. 

□ bei der Behorde nachtraglich in schriftlicher Form eingereicht worden ist. 

□ bei der Behorde nachtraglich in computerlesbarer Form eingereicht worden ist. 

□ Die Erklarung, daG das nachtraglich eingereichte schriftliche Sequenzprotokoll nicht uber den 
Offenbarungsgehalt der internationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt. 

□ Die Erklarung, daB die in computerlesbarer Form erfassten Informationen dem schriftlichen 
Sequenzprotokoll entsprechen, wurde vorgelegt. 

4. Aufgrund der Anderungen sind folgende Unterlagen fortgefallen: 



Formblatt PCT/IPEA/409 (Felder l-VIII, Blatt 1) (Juli 1998) 



INTERN ATIONALER VORLAUFIGER 
PRUFUNGSBERICHT 



Internationales Aktenzeichen PCT/E POO/06827 



□ Beschreibung, Seiten: 

□ Anspruche, Nr.: 

□ Zeichnungen, Blatt: 

5. □ Dieser Bericht ist ohne Berucksichtigung (von einigen) der Anderungen erstellt worden, da diese aus den 
angegebenen Grunden nach Auffassung der Behorde uber den Offenbarungsgehalt in der ursprunglich 
eingereichten Fassung hinausgehen (Regel 70.2(c)). 

(Auf Ersatzblatter, die solche Anderungen enthalten, ist unter Punkt 1 hinzuweisen;sie sind diesem Bericht 
beizufugen). 



6. Etwaige zusatzliche Bemerkungen: 



V. Begrundete Feststellung nach Artikel 35(2) hinsichtlich der Neuheit, der erfinderischen Tatigkeit und der 
gewerblichen Anwendbarkeit; Unterlagen und Erklarungen zur Stutzung dieser Feststellung 

1. Feststellung 

Neuheit (N) - Ja: Anspruche 1-15 

Nein: Anspruche 

Erfinderische Tatigkeit (ET) Ja: Anspruche 14,15 

Nein: Anspruche 1-13 

Gewerbliche Anwendbarkeit (GA) Ja: Anspruche 1-15 

Nein: Anspruche 



2. Unterlagen und Erklarungen 
siehe Beiblatt 



VII. Bestimmte Mangel der internationalen Anmeldung 

Es wurde festgestellt, daB die internationale Anmeldung nach Form Oder Inhalt folgende Mangel aufweist: 
siehe Beiblatt 



Formblatt PCT/IPEA/409 (Felder l-VIII, Blatt 2) (Juli 1998) 



INTERNATIONALER VORLAUFIGER 
PRUFUNGSBERICHT - BEIBLATT 



Internationales Aktenzeichen PCT/E POO/06827 



Zu Punkt V 

Begriindete Feststellung nach Regel 66.2(a)(ii) hinsichtlich der Neuheit, der 
erfinderischen Tatigkeit und der gewerblichen Anwendbarkeit; Unterlagen und 
Erklarungen zur Stutzung dieser Feststellung 



1 . Es wird auf die folgenden Dokumente verwiesen: 



D1 : GB-A-2 321 565 (BRITISH BROADCASTING CORP) 29. Juli 1998 
D2: EP-A-0 876 055 (RT SET LTD) 4. November 1998 

2. Die vorliegenden unabhangigen Anspruche 1 und 13 erfullen das Erfordernis der 
erfinderischen Tatigkeit nicht. 

Dokument D1 nimmt die wesentlichen Merkmale des Verfahrens des vorliegenden 

Anspruchs 1 vorweg, siehe dazu Seite 15, Zeile 13 - Seite 16, Zeile 12. 

Das Hauptmerkmal des beanspruchten Verfahren scheint darin zu bestehen, daB 

der ... Hinterarund in einer ... Frequenz aeandert wird. 

Dazu wird in abhangigen Anspruchen 14 und 15 sowie in den 
Ausfiihrungsbeispielen angegeben, daB die Anderung des Hintergrundes durch 
optische Anderung von Hintergrundelementen bewirkt wird. 
Diese Definition fehlt im unabhangigen Anspruch 1 (sowie im ebenfalls als 
unabhangig aufzufassenden Anspruch 13). 

Der Begriff "Hintergrund" laBt sich nun verschiedentlich interpretieren. Sowohl ein 
testes Material oder Element kann als Hintergrund aufgefaBt werden, als auch 
eine Projektion eines Bildes auf eine Leinwand, was dann ein "Hintergrundbild" 
ergibt. 

GemaB D1 wird ein Hintergrund gebildet, indem ein Reflektionsmaterial mit einer 
Lichtquelle einer bestimmten Frequenz beleuchtet wird. Damit wurde sich der 
Anspruchsgegenstand uberhaupt nicht mehr von der Offenbarung von D1 
unterscheiden. 

Sollte man dennoch dem Begriff "Hintergrund" eine unterscheidende Bedeutung 
einraumen, dann diirfte es dem Fachmann dennoch gelaufig sein, daB alternativ 
zu einer pulsierenden und synchronisierten Beleuchtung eines 
Hintergrundmaterials auch ein Hintergrundelement verwendet werden kann, 



Formblatt PCT/Beibtatt/409 (Blatt 1) (EPA- April 1997) 



INTERNATIONALER VORLAUFIGER Internationales Aktenzeichen PCT/E POO/06827 
PRUFUNGSBERICHT - BEIBLATT 



welches selbst pulsierendes, synchronisiertes Licht erzeugt. 

Dieses wird namlich auch im Dokument D2 angeregt, siehe Spalte 6, Zeilen 5-42. 

Daher ist der vorliegende Anspruchswortlaut des Anspruchs 1 zumindest 
nahegelegt durch eine Kombination von D1 und D2. 

Fur den Anspruch 13 gilt sinngemaB das gleiche, da dessen Merkmale nicht uber 
die des Anspruchs 1 hinausgehen. 

3. Die Merkmale der abhangigen Anspriiche 2, 4-9,1 2, 14 ergeben sich ebenfalls 
aus Dokument D1 oder aus einer Kombination mit D2, siehe obige Passagen, 
bzw. sind dem Fachmann gelaufige MaBnahmen. 

4. Angesichts der Relevanz von D1 und D2 ist nicht ersichtlich, ob die ubrigen 
abhangigen Anspriiche 3, 10-1 1 Details enthalten, die uber fachubliche 
MaBnahmen hinausgehen. Allerdings gibt es fur die Merkmale dieser Anspriiche 
keine direkte Offenbarung oder Anregung in D1 oder D2. 

Auch wird das sich andernde Hintergrundmuster in D2 oder D1 nur durch 
entsprechende Projektionen erreicht, nicht durch elektrooptische Elemente, vgl. 
Anspriiche 14 und 15. 

5. Fur die Beurteilung der Frage, ob die Gegenstande der vorliegenden Anspriiche 
gewerblich anwendbar sind, gibt es in den PCT-Vertragsstaaten keine 
einheitlichen Kriterien. Die Patentierbarkeit kann auch von der Formulierung der 
Anspriiche abhangen. Aufgrund des vorliegenden technischen Fachgebiets 
scheint die gewerbliche Anwendbarkeit aber auBer Zweifel zu stehen. 

Zu Punkt VII 

Bestimmte Mangel der international Anmeldung 

Im Widerspruch zu den Erfordernissen der Regel 5.1 a) ii) PCT werden in der 
Beschreibung weder der in den Dokumenten D1-D2 offenbarte einschlagige 
Stand der Technik noch diese Dokumente angegeben. 
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Bfig DIE INTERNATIONALE ZUSAMtfEl 
L^PEM GEBIET DES PATENTWES^J 

PCT 

INTERN ATIONALER RECHERCHENBERICHT 

( Artikel 1 8 sowie Regeln 43 und 44 PCT) 



Aktenzeichen des Anmelders Oder Anwalts 

225 002 P-WO 


WEITERES siehe M'rtteilung uber die Ubermittlung des international 

Recherchenberichts (Formblatt PCT/ISA/220) sowie, soweit 
VORGEHEN zutreffend, nachstehender Punkt 5 


Internationales Aktenzeichen 

PCT/EP 00/06827 


Internationales Anmeldedatum 
(Tag/Monat/Jahr) 

17/07/2000 


(Fruhestes) Prioritatsdatum (Tag/Monat/Jahr) 

15/07/1999 


Anmelder 

SETZER , Steffen 



Dieser internationale Recherchenbericht wurde von der International Recherchenbehorde erstellt und wird dem Anmelder gemaB 
Artikel 18 iibermittelt. Eine Kopie wird dem Internationalen Buro ubermittelt. 

Dieser internationale Recherchenbericht umfaBt insgesamt _2 Blatter. 

| X [ Daruber hinaus liegt ihm jeweils eine Kopie der in diesem Bericht genannten Unterlagen zum Stand der Technik bei. 



1. Grundlage des Berlchts 

a. Hinsichtlich der Sprache ist die internationale Recherche auf der Grundlage der internationalen Anmeldung in der Sprache 
durchgefuhrt worden, in der sie eingereicht wurde, sofern unter diesem Punkt nichts anderes angegeben ist. 



□ 



2. 
3. 

4. 



Die internationale Recherche ist auf der Grundlage einer bei der Behorde eingereichten Ubersetzung der internationalen 
Anmeldung (Regel 23.1 b)) durchgefuhrt worden. 

b. Hinsichtlich der in der internationalen Anmeldung offenbarten Nucleotld- und/oder Aminosauresequenz ist die internationale 
Recherche auf der Grundlage des Sequenzprotokolls durchgefuhrt worden, das 
] ] in der internationalen Anmeldung in Schriflicher Form enthaften ist 

zusammen mit der internationalen Anmeldung in computerlesbarer Form eingereicht worden ist. 
j j bei der Behorde nachtraglich in schriftlicher Form eingereicht worden ist. 
| | bei der Behorde nachtraglich in computerlesbarer Form eingereicht worden ist. 

[~] Die Erklarung, daB das nachtraglich eingereichte schriftliche Sequenzprotokoll nicht uber den Offenbarungsgehalt der 
internationalen Anmeldung im Anmeldezeitpunkt hinausgeht, wurde vorgelegt. 

I | Die Erklarung, daB die in computerlesbarer Form erfaBten Informationen dem schriftlichen Sequenzprotokoll entsprechen, 
wurde vorgelegt. 

| | Bestlmmte Anspriiche haben slch als nicht recherchierbar erwiesen (siehe Feld I). 
| | Mangelnde Elnheltllchkeit der Erflndung (siehe Feld II). 

Hinsichtlich der Bezelchnung der Erflndung 

fX] wird der vom Anmelder eingereichte Wortlaut genehmigt. 
[~~| wurde der Wortlaut von der Behorde wie folgt festgesetzt: 



Hinsichtlich der Zusammenfassung 

RTI wird der vom Anmelder eingereichte Wortlaut genehmigt. 

wurde der Wortlaut nach Regel 38.2b) in der in Feld III angegebenen Fassung von der Behorde festgesetzt. Der 
j | Anmelder kann der Behorde innerhalb eines Monats nach dem Datum der Absendung dieses internationalen 

Recherchenberichts eine Stellungnahme vorlegen. 

Folgende Abbildung der Zelchnungen ist mit der Zusammenfassung zu veroffentlichen: Abb. Nr. _] 



[X| wie vom Anmelder vorgeschlagen Q keine der Abb. 

f~"~] weil der Anmelder selbst keine Abbildung vorgeschlagen hat. 
[ | weil diese Abbildung die Erfindung besser kennzeichnet. 



Formblatt PCT/lSA/210 (Blatt 1) (Juli 1998) 



INTERNATIONALER RECHERCHENBERICHT 



A. KLASSI FIZIERU NG DES ANMELDUNGSGfcGENSTANDES 

IPK 7 H04N5/272 



Nach der Intemationalen PatentWassifikation (IPK) oder nach der nationalen Klassifikation und der IPK 



Internationales Aktenzeichen 

^P^^_00/06827^ 



B. RECHERCHIERTE GEBIETE 



Recherchierter Mindestprufstoff (Klassifikationssystem und Klassifikationssymbole ) 

IPK 7 H04N 



Recherchierte aber nicht zum Mindestprufstoff gehorende Veroffentlichungen, soweit diese unterdie recherchierten Gebiete fallen 



Wan rend der intemationalen Recherche konsultierte elektronische Datenbank (Name der Datenbank und evtl. verwendete Suchbegriffe) 

EPO-Internal, WPI Data, INSPEC 



C. ALS WESENTLICH ANGESEHENE UNTERLAGEN 



Kategorie 0 Bezeichnung der Veroffentlichung, soweit erf order! ich unter Angabe der in Betracht kommenden Teile 



Betr. Anspruch Nr. 



p,x 



GB 2 343 078 A (DAISHO DENKI KK) 

26. April 2000 (2000-04-26) 

Seite 5, Zeile 20 -Seite 20, Zeile 21 

GB 2 321 565 A (BRITISH BROADCASTING CORP) 
29. Juli 1998 (1998-07-29) 

Seite 7, Zeile 1 - Zeile 4 

Seite 15, Zeile 13 -Seite 16, Zeile 12 

Anspruche 18,19 

Abbildung 2 

EP 0 876 055 A (RT SET LTD) 
4. November 1998 (1998-11-04) 
Spalte 6, Zeile 2 - Zeile 34 



1,2,4,7, 
8,12,13 



1,2,4,5, 

7-9,12, 

13 



1,13 



□ 



Weitere Veroffentlichungen sind der Fortsetzung von Feld C zu 
entnehmen 



Siehe Anhang Patentfamiiie 



° Besondere Kategorien von angegebenen Veroffentlichungen 

"A" Veroffentlichung, die den allgemeinen Stand der Technik definiert, 
aber nicht als besonders bedeutsam anzusehen ist 

"E" alteres Dokument, das jedoch erst am oder nach dem intemationalen 
An melded a turn veroffentlicht word en ist 

"L" Veroffentlichung, die geeignet ist, einen Prioritatsanspruch zweifelhaft er- 
scheinen zu lassen, oder durch die das Verdffentlichungsdatum einer 
anderen im Recherchenbericht genannten Veroffentlichung belegt werden 
soil oder die aus einem anderen besonderen Grund angegeben ist (wie 
ausgefuhrt) 

"O" Veroffentlichung, die sich auf eine mundliche Offenbarung, 

eine Benutzung, eine Ausstellung oder andere Mafcnahmen bezieht 

"P" Veroffentlichung, die vor dem intemationalen Anm el deda turn, aber nach 
dem beanspruchten Prioritatsdatum veroffentlicht worden ist 



T" Spatere Veroffentlichung, die nach dem intemationalen Anmeldedatum 
oder dem Prioritatsdatum veroffentlicht worden ist und mit der 
Anmeldung nicht kollidiert, sondem nur zum Verstandnis des der 
Erfindung zug run deli eg en den Prinzips oder der ihr zugrundeliegenden 
Theorie angegeben ist 

"X" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann allein auf grund dieser Veroffentlichung nicht als neu oder auf 
erfinde rise her Tatigkeit beruhend betrachtet werden 

"Y" Veroffentlichung von besonderer Bedeutung; die beanspruchte Erfindung 
kann nicht als auf erfinderischer Tatigkeit beruhend betrachtet 
werden, wenn die Veroffentlichung mit einer oder mehreren anderen 
Veroffentlichungen dieser Kategorie in Verbindung gebracht wird und 
diese Verbindung fur einen Facnmann naheliegend ist 

Veroffentlichung, die Mitglied derselben Patentfamiiie ist 



Datum des Abschlusses der intemationalen Recherche 



9. Oktober 2000 



Absendedatum des intemationalen Recherchenberichts 



16/10/2000 



Name und Postanschrift der Intemationalen Recherchenbehorde 
Europaisches Patentamt, P.B. 5818 Patentlaan 2 
NL - 2280 HV Rijswijk 
Tel. (+31-70) 340-2040, Tx. 31 651 epo nl, 
Fax: (+31-70) 340-3016 



Bevollmachtigter Bediensteter 



Wentzel , J 



Formblatt PCT/1SA/210 (Blatt 2) (Juli 1992) 



INTERNATIONAL SEARCH REPORT 

InformaJ^^pn patent family members 



Patent document 
cited in search report 



Publication 
date 



International Application No 

P_0f£_ 00/06827 



Patent family 
member(s) 



Publication 
date 



GB 2343078 



26-04-2000 



JP 2000069498 A 



03-03-2000 



GB 


2321565 


A 


29-07-1998 


GB 


2321814 


A 


05-08-1998 










GB 


2338367 


A 


15-12-1999 


EP 


0876055 


A 


04-11-1998 


CA 


2230430 


A 


01-10-1998 



Form PCT/ISA/210 (patent family annex) (July 1 992) 



lTENT cooperation treat 

PCT 

INTERNATIONAL PRELIMINARY EXAMINATION REPORT 

(PCT Article 36 and Rule 70) 



Applicant's or agent's file reference 
225 002 P-WO 


FOR FiiDTHFR ArTiON See Notification of Transmittal of International 
*UK t UK I HLR ACIIOIN PreIiminary Examination Report (Form PCT7IPEA/416) 


International application No. 

PCT/EP00/06827 


International filing date (day/month/year) 
17 July 2000(17.07.00) 


Priority date (day/month/year) 

15 July 1999(15.07.99) 


International Patent Classification (IPC) or national classification and IPC 
H04N 5/272 


Applicant 


SCANNOVA GMBH 





This international preliminary examination report has been prepared by this International Preliminary Examining 
Authority and is transmitted to the applicant according to Article 36. 



2. This REPORT consists of a total of 



. sheets, including this cover sheet. 



I I This report is also accompanied by ANNEXES, i.e., sheets of the description, claims and/or drawings which have 
' — ' been amended and are the basis for this report and/or sheets containing rectifications made before this Authority 



(see Rule 70.16 and Section 607 of the Administrative Instructions under the PCT). 
These annexes consist of a total of sheets. 



This report contains indications relating to the following items: 
Basis of the report 
Priority 

Non-establishment of opinion with regard to novelty, inventive step and industrial applicability 
Lack of unity of invention 

Reasoned statement under Article 35(2) with regard to novelty, inventive step or industrial applicability; 
citations and explanations supporting such statement 

Certain documents cited 

Certain defects in the international application 

Certain observations on the international application 



I 


I2SJ 


11 


□ 


III 


□ 


IV 


□ 


V 




VI 


□ 


VII 


13 


VIII 


□ 



Date of submission of the demand 

08 February 2001 (08.02.01) 


Date of completion of this report 

16 October 2001 (16.10.2001) 


Name and mailing address of the IPEA/EP 
Facsimile No. 


Authorized officer 
Telephone No. 



Form PCT/IPEA/409 (cover sheet) (January 1994) 



INTERNATIONAL PRELI 



Y EXAMINATION REPORT 



Int^^pi 



mal application No. 

PCT/EP00/06827 



I. Basis of the report 



1 . This report has been drawn on the basis of {Replacement sheets which have been furnished to the receiving Office in response to an invitation 
under Article 14 are referred to in this report as "originally filed" and are not annexed to the report since they do not contain amendments.). 

the international application as originally filed. 

[)^| the description, pages Lli2 » as originally filed, 

pages , filed with the demand, 

pages , filed with the letter of . 

pages , filed with the letter of 



the claims, 



Nos. 
Nos. 
Nos. 
Nos. 
Nos. 



1-15 



, as originally filed, 

, as amended under Article 19, 

, filed with the demand, 

, filed with the letter of 

, filed with the letter of 



the drawings, 



sheets/fig 
sheets/fig 
sheets/fig 
sheets/fig 



1-2 



, as originally filed, 
, filed with the demand, 
, filed with the letter of 
, filed with the letter of 



2. The amendments have resulted in the cancellation of: 

1 1 the description, pages 

I I the claims, Nos. 



I 1 the drawings, sheets/fig 



3 I I This report has been established as if (some of) the amendments had not been made, since they have been considered 
1 — 1 to go beyond the disclosure as filed, as indicated in the Supplemental Box (Rule 70.2(c)). 

4. Additional observations, if necessary: 



Form PCT/IPEA/409 (Box I) (January 1994) 



INTERNATIONAL PRELIM^^BlY EXAMINATION REPORT 



Inten^^mal application No. 
pd^Pp 00/06827 



V. Reasoned statement under Article 35(2) with regard to novelty, inventive step or industrial applicability; 
citations and explanations supporting such statement 



1 . Statement 

Novelty (N) 

Inventive step (IS) 
Industrial applicability (IA) 



Claims 
Claims 

Claims 
Claims 

Claims 
Claims 



1-15 



14, 15 



1-13 



1-15 



YES 
NO 
YES 
NO 

YES 
NO 



Citations and explanations 

1. Reference is made to the following documents: 

Dl: GB-A-2 321 565 (BRITISH BROADCASTING CORP.) 29 
July 1998 

D2: EP-A-0 876 055 (RT SET LTD.) 4 November 1998. 



2. The present independent Claims 1 and 13 do not meet 
the requirement for inventive step. 
Document Dl anticipates the essential features of 
the process of the present Claim 1; see page 15, 
line 13 to page 16, line 12. 

The main feature of the claimed process appears to 
consist in the fact that 



the ... background is changed at a frequency .... 

Dependent Claims 14 and 15 and the embodiments 
indicate that the background is changed as a result 
of an optical change of background elements. 
This definition is lacking in independent Claim 1 
(and in Claim 13, which is likewise to be regarded 
as an independent claim) . 
The term "background" can have various 
interpretations. A solid material or element can be 



Form PCT/IPEA/409 (Box V) (January 1994) 



INTERNATIONAL PRELIM) 
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considered to be background, as can a projection of 
an image onto a screen, which thus produces a 
"background image". 

According to Dl, a background is formed in which a 
reflective material is illuminated using a light 
source with a specific frequency, and thus the 
claimed subject matter would certainly no longer 
differ from the disclosure of Dl . 

Even if one were to allocate a different meaning to 
the term "background", then it would appear to be 
customary to a person skilled in the art that a 
background element can also be used as an 
alternative to a pulsating and synchronised 
illumination of a background material, said 
background element per se serving to generate 
pulsating, synchronised light. 

This is in fact also suggested in document D2; see 
column 6, lines 5-42. 

Consequently, the present wording of Claim 1 is at 
least suggested by a combination of Dl and D2 . 
This applies analogously to Claim 13 since the 
features of that claim do not go beyond those of 
Claim 1. 

The features of dependent Claims 2, 4-9, 12 and 14 
are likewise clear from document Dl or from a 
combination with D2 - see the aforementioned 
passages - or they are measures which are customary 
to a person skilled in the art. 

It is not clear in view of the relevance of Dl and 
D2 whether the remaining dependent Claims 3 and 10- 
11 contain details which go beyond conventional 
measures. However, there is no direct disclosure or 
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suggestion in Dl or D2 for the features of these 
claims . 

The changing background pattern in D2 or Dl is also 
achieved only by corresponding projections and not 
by electro-optical elements; see Claims 14 and 15. 

5. The PCT Contracting States do not have uniform 

criteria for assessing whether the subjects of the 
present claims are industrially applicable. 
Patentability can also depend on the wording of the 
claims. However, there appears to be no doubt 
regarding industrial applicability owing to the 
present technical specific field. 



Form PCT/IPE A/409 (Box V) (January 1994) 



INTERNATIONAL PRELIM 
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VII. Certain defects in the international application 

The following defects in the form or contents of the international application have been noted: 

Contrary to the requirements of PCT Rule 5.1(a) (ii) 
neither the relevant prior art disclosed in documents Dl- 
D2 nor these documents have been indicated in the 
description . 
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From the INTERNATIONAL BUREAU 


PCT 


To: 


NOTIFICATION OF ELECTION 

(PCT Rule 61.2) 


Commissioner 

US Department of Commerce 
United States Patent and Trademark 
Office, PCT 

2011 South Clark Place Room 
CP2/5C24 

Arlington, VA 22202 
ETATS-UNIS D'AMERIQUE 

in its capacity as elected Office 


Date of mailing (day/month/year) 
05 April 2001 (05.04.01) 




International application No. 
PCT/EP00/06827 


Applicant's or agent's file reference 
225 002 P-WO 


International filing date (day/month/year) 

17 July 2000 (17.07.00) 


Priority date (day/month/year) 
15 July 1999(15.07.99) 


Applicant 




SETZER, Steffen et al 




1. The designated Office is hereby notified of its election made: 


| X| in the demand filed with the international Preliminary Examining Authority on: 


08 February 2001 (08.02.01) 


in a notice effecting later election filed with the International Bureau on: 


2. The election | X| was 




j J was not 




made before the expiration of 19 months from the priority date or, where Rule 32 applies, within the time limit under 
Rule 32.2(b). - 


The International Bureau of W1PO 
34, chemin des Colombettes 
121 1 Geneva 20, Switzerland 

Facsimile No.: (41-22) 740.14.35 


Authorized officer 

Jean-Marie McAdams 
Telephone No.: (41-22)338.83.38 


Form PCT/IB/331 (July 1992) 


EP0006827 
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From the INTERNATIONAL BUREAU 



PCT 

NOTIFICATION RELATING TO PRIORITY CLAIM 

(PCT Rules 26bis.1 and 26bis.2 and 

MUf ill III Oil Oil VC 1 1 loll UOUUIIo, OCUUvJIlO tUt. OIIU **\JJf 


To: 

HOSSLE & KUDLEK 
Moserstrasse 8 
D-701 82 Stuttgart 

AILFMAC5NE 


Date of mailing (day/month/year) 
1 2 October 2000 (12.1 0.00) 


Applicant's or agent's file reference 
225 002 P-WO 


IMPORTANT NOTIFICATION 


International application No. 
PCT/EP00/06827 


International filing date (day/month/year) 
17 July 2000 (17.07.00) 


Applicant 

SETZER, Steffen et al 



The applicant is hereby notified of the following in respect of the priority claim(s) made in the international application. 

1- H Correction of priority daim. In accordance with the applicant's notice received on: 25 August 2000 (25.08.00), 
the following priority claim has been corrected to read as follows: 

DE 15 July 1999(15.07.99) 199 32 663.0 
f~] even though the indication of the number of the earlier application is missing. 

CD oven tnou 9 n tne following indication in the priority claim is not the same as the corresponding indication appearing 
in the priority document: 

2. Q] Addition of priority daim. In accordance with the applicant's notice received on: , 

the following priority claim has been added: 

| | even though the indication of the number of the earlier application is missing. 

Q even though the following indication in the priority claim is not the same as the corresponding indication appearing 
in the priority document: 

3. [~1 As a result of the correction and/or addition of (a) priority claim(s) under items 1 and/or 2, the (earliest) priority date is: 

4. Q Priority daim considered not to have been made. 

|~~| The applicant failed to respond to the Invitation under Rule 26bis.2(a) (Form PCT/IB/316) withi n the prescribed time limit. 

The applicant's notice was received after the expiration of the prescribed time limit under Rule 26bis.1(a). 
PI The applicant's notice failed to correct the priority claim so as to comply with the requirements of Rule 4.10. 
The applicant may, before the technical preparations for international publication h8ve been completed and subject to the 
payment of a fee, request the International Bureau to publish, together with the international application, information 
concerning the priority claim. See Rule 26bis.2(c) and the PCT Applicant's Guide, Volume I, Annex B2(IB). 

5. □ In case where multiple priorities have been claimed, the above item(s) relate to the following priority claim(s): 



6. A copy of this notification has been sent to the receiving Office and 
f%] to the International Searching Authority (where the international search report has not yet been issued). 
[%] the designated Offices (which have already been notified of the receipt of the record copy). 



The International Bureau of W1PO 


Authorized officer 




34, chemin des Colombettes 


Athina Nickitas-Etienne 


121 1 Geneva 20, Switzerland 


Facsimile No. (41-22) 740.14.35 


Telephone No. (41 -22) 338.83.38 


Form PCT/IB/318(July 1998) 


003579872 



From the INTERNATIONAL BUREAU 



PCT 



NOTIFICATION OF THE RECORDING 
OF A CHANGE 

(PCT Rule 92bis.1 and 
Administrative Instructions, Section 422) 



Date of mailing (day/month/year) 
05 April 2001 (05.04.01) 



Applicant's or agent* s file reference 
225 002 P-WO 



To: 



HOSSLE & KUDLEK 
Diemershaldenstr. 23 
70184 Stuttgart 
ALLEMAGNE 



IMPORTANT NOTIFICATION 



International application No. 

PCT/E POO/06827 



I date (day/month/year) 
17 July 2000(17.07.00) 



1. The following indications appeared on record concerning: 
Q the applicant Q the inventor [x] the agent 

□ 



the common representative 



Name and Address 

HOSSLE & KUDLEK 
Moserstrasse 8 
D-70182 Stuttgart 
Germany 


State of Nationality 




Telephone No. 
0711/244003 


Facsimile No. 
0711/243252 


Teleprinter No. 


2. The International Bureau hereby notifies the applicant that the following change has been recorded concerning: 
j [J the person Q the name X the address P] the nationality [J the residence 


Name and Address 

HOSSLE & KUDLEK 
Diemershaldenstr. 23 
70184 Stuttgart 
Germany 


State of Nationality 


State of Residence 


Telephone No. 
0711/248395-0 


Facsimile No. 

0711/248395-25 


Teleprinter No. 



3. Further observations, if necessary: 



4. A copy of this notification has been sent to: 

| X| the receiving Office 

P~] the International Searching Authority 

pX| the International Preliminary Examining Authority 



the designated Offices concerned 
| X| the elected Offices concerned 
[~| other: 



The International Bureau of WIPO 
34, chemin des Colombettes 
1211 Geneva 20, Switzerland 



Facsimile No.: (41-22) 740.14.35 



Authorized officer 

Jean-Marie McAdams 

Telephone No.: (41 22) 338.83.38 



Form PCT/IB/306 (March 1994) 



003947399 
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From the INTERNATIONAL BUREAU 



PCT 

NOTIFICATION OF THE RECORDING 
OF A CHANGE 

(PCT Rule 92bis.1 and 
Administrative Instructions, Section 422) 


To: 

HOSSLE & KUDLEK 
Diemershaldenstr. 23 
70184 Stuttgart 
ALLEMAGNE 


Date of mailing (day/month/year) 

17 January 2002(17.01.02) 


Applicant's or agent's file reference 
225 002 P-WO 


IMPORTANT NOTIFICATION 


International application No. 
PCT/EPOO/06827 


International filing date (day/month/year) 
17 July 2000(17.07.00) 


1. The following indications appeared on record concerning: 

X the applicant Q the inventor Q the agent Q the common representative 


Name and Address 


State of Nationality 


State of Residence 


Telephone No. 


Facsimile No. 


Teleprinter No. 


2. The International Bureau hereby notifies the applicant that the following change has been recorded concerning: 

X the person Q the name [_] the address Q the nationality Q the residence 


Name and Address 

SCANNOVA GMBH 
Wittlensweiler Strasse 3-19 
72250 Freudenstadt 
Germany 


State of Nationality 


State of Residence 


Telephone No. 


Facsimile No. 


Teleprinter No. 


3. Further observations, if necessary: . . 

The above-identified company shall be added to the records as applicant for all designated 
States except the United States of America. SETZER, Steffen and WRIGHT, Drttmar shall now 
be recorded as aDDlicant/inventors for the US onlv. 


4. A copy of this notification has been sent to: 
[~X] the receiving Office Q the designated Offices concerned 
| | the International Searching Authority [*] tne elected Offices concerned 
| | the International Preliminary Examining Authority | | other: 


The International Bureau of WIPO 
34, chemin des Colombettes 
1211 Geneva 20, Switzerland 

Facsimile No.: (41-22) 740.14.35 


Authorized officer 

Beate GIFFO-SCHMITT 

Telephone No.: (41-22) 338.83.38 


Form PCT/IB/306 (March 1994) 


004699990 



WOQ1/06766 PCT/CT0MW827 



#10/030079 

PCT/EP00/06827 

531 ftec'dPCD??" 1 1 JAN 2002 



Verfahren zur Bilddatenverarbeitung 
und Kameraaufnahme system 

'» 

Die vorliegende Erfindung betrifft ein Verfahren zur Bild- 
datenverarbeitung, bei dem eine Trennung von einen Bildvor- 
dergrund darstellenden Objektdaten eines BiXddatensat zes 
von einem einen Bildhintergrund darstellenden Datensatz er- 
folgt, sowie ein Kameraauf nahmesystem, das inebeeondere zur 
Durchfuhrung eines derartigen Verfahren© geeignet ist. 

Aus der Fernsehtechnik ist das sogenannte Blue -Box- Ver- 
fahren bekannt, bei dem eine den Hintergrund der aufzuneh- 
menden Einstellung bildende Flache als einfarbiger, insbe- 
sondere blauer Hintergrund ausgestaltet wircL Die Aufnahme 
eines Objektes vor diesem Hintergrund wird vor einer ersten 
Fernsehkamera bei einer Bildfrequenz von ublicherweise 50 
bis 60 Halbbilder pro Sekunde aufgenommen, wahrend parallel 
dazu von einer zweiten Fernsehkamera ein den blauen Hinter- 
grund des ersten Bildes ersetzender Hintergrund, beispiels- 
weise einer Wetterkarte, aufgenommen wird. Die beiden par- 
allel auf genommenen Bildseguenzen werden in einem Mischer 
synchronic iert ubereinandergelegt , und der blaue Hinter- 
grundbereich wird durch das roit der zweiten Femsehkamera 
aufgenommene Bild ersetzt, 

Bei dem sogenannten Blue-Box- Verfahren werden zv/ei prinzi - 
pielle Verfahren unterschieden, von denen ein erstes Ver- 
fahren auf einer Definition des Farbwerts beruht (die den 
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Hintergrund darscellende Farbe wird als durchsichtig defi- 
niert) , wahrend bei dem zweiten, gewerblich insbesondere 
von. der Firrna Ultimatte umgesetaten Verfahren eine Defini- 
tion des Hintergrunds uber die Konstanz der Helligkeit 
und/oder Sattigung des Parbraumes des Hintergrundes er- 
folgt . 

Der Vorteil der bekannten Verfahren liegt darin, da£ die 

Verarbeitung der analogen Bilddaten relativ einfach und in 

Echtzeit erfolgt. Als Nachteil ist f estzuhalten, dafi der 

zumeist blaue, aber h&ufig auch grune Hintergrund sehr gut 

ausgeleuchtet sein mu£, denn die Farbe bzw, Helligkeit 

und/oder Sattigung der Farbe mu& in der auf genommenen Bild- 

sequenz in hoher Qualitat sehr gleichm&fiig sein, was nur 

durch sine hervorragende Ausleuchtung der den Hintergrund 

darstellenden farbigen FISche erreicht werden kann. Diese 

Ausleuchtung ist jedoch mit einem sehr groEen Auf wand ver- 

bunden, da die typieche Einleucht zeit fur ein Aufnahmestu- 

dio ca- eine Woche, oft sogar linger betragt , Abgesehen von 

der damit verbundenen Mannzeit wird sehr viel Strom ver- 

braucht und es entsteht eine fiir die in der Auf nahmeumge- 

bung Tatigen unangenehm grofie Warme. Des weiteren wirkt 

sich nachteilig aus, daS Schatten und /oder Reflexionen 

vermieden werden museen, was das Ausleuchten zusatzlich er- 

schwert. Reflexionen sind mit den bekannten Verfahren 

« 

nicht, Schatten nur schwer korrigierbar ♦ 

ErfindungsgemS.fi werden dahingegen ein Verfahren 2ur Bild- 
datenverarbeitung mit den Merkmalen des Anspruchs 1 sowie 
ein Kameraauf nahmesystem mit den Merkmalen dee Anspruohs 8 
vorgeschlagen . 
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Der Erfindung liegt der Gedanke zugrunde, da£ der Hinter- 
grund in einer auf die Auf nahmef reguenz der aufnehmenden 
Kamera abgestimmten Frequenz definiert geandert wird> Unter 
Abstimmung ist hierbei zu verstehen, dafi die Frequent der 
Hintergrundanderung in einem bekannten Verbal tnis zu der 
Aufnahmef requenz steht* Es kann sich hierbei urn ein ganz- 
zahliges aber auch beliebiges Vielfaches der Aufnahmefre- 
quenz handeln. Die Auf nahmef requenz betragt vorzugsweise 
ein Vielfaches der Wiedergabef requenz, beispielsweise das 
Doppelte der ttblichen Fernsehbildf requenz, also ca. 100 bis 
120 Halbbilder pro Sekunde* Grundsatzlich funktioniert das 
erf indungsgemafie Verfahren, wie nachfolgend noch beschrie- 
ben wird, bei beliebigen Auf nahmef requenzen bis zu mehreren 
tausend Bildern pro Sekunde mit darauf abgestimmter Ande- 
rungsf requenz des Hintergrunds , Voraussetzung ist, dafi sich 
der Inhalt (Vordergrund) zweier auf einanderfolgend aufge- 
nommener Bilder nicht oder zumindest nur unwesentlich &n- 
dert, da jedes zweite Bild der Bildseguenz als Referenzbild 
verwendet wird. 

Das erf indungsgemafie Verfahren erdffnet die Moglichkeit des 
Einsatzes digitaler Kameras und der Ausschopfung deren 
techniecher Vorteile. Die Aufnahme einer Bildsequenz mit 
der beispielsweise doppelten Prequenz bei sich mit entspre- 
chend dieser Frequenz definiert Snderndem Hintergrund fuhrt 
zu einer Seguenz von Bildpaaren, wobei eich die beiden je- 
weils ein Bildpaar bildenden Bilder (bei den Oblichen Bewe- 
gungsgeschwindigkeiten aufgenommener Objekte) bis auf den 
von einer Aufnahme zur n&ehsten definiert geanderten Hin- 
tergrund nicht oder kaum voneinander unterscheiden. Eines 
der beiden Bilder eines Bildpaares kann somit als Referenz- 
bild fftr das jeweils andere Bild dienen« 
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Unter Ausnutzung der Vorteile der digitalen Aufnahmetechnik 
- jeder aufgenommene Bildpunkt (Pixel) eines Bildes kann 
mit dem entsprechenden Bildpunkt dee darauf f olgenden Bildes 
direkt verglichen warden - warden die beiden Bilder eines 
Bildpaares miteinander verglichen, indem beispielsweise ein 
jeder Bildpunkt des Ref erenzbildes von dem entsprechenden 
Bildpunkt des anderen Bildes abgezogen wird* Wahrend sich 
als Resultat des Vergleiches fur das den Vordergrund der 
Aufnahme bildende Objekt bei Nichtanderung (nicht oder 
langsam bewegtes Objekt) Null bzw. nahezu Null und bei 
leichter Anderung (schnell bewegtes Objekt) ein von Null 
verschiedener willkurlicher Wert ergibt, ergibt der Ver- 
gleich der Hintergrundf l&chen einen vorbestimmten definier- 
ten Wert, da der Hintergrund von der Aufnahme des einen 
Bildes zum n&chsten Bild gezielt definiert ver&ndert wurde - 
Die Anderung des Hintergrund© kann durch Umechalten zwi- 
schen zwei Zustanden oder durch graduelles kontinuierli- 
ches, beispielsweise sinusf ormiges Oszillieren zwischen den 
beiden Zustanden erfolgen. 

Um das den Vordergrund der Aufnahme bildende Objekt nun vom 
Hintergrund zu trennen, es sozusagen "auszuschneiden" , wer- 
den alle Bildpunkte, denen beim Vergleich der beiden ein 
Bildpaar bildenden Bilder ein definierter Inhalt zugeordnet 
wurde, unterdruckt und ggf . durch den Inhalt eines parallel 
aufgenommenen Bildes (beispielsweise der Wetterkarte) er- 
setzt. Die Quelle dieaes zweiten Bildea ist beliebig. An- 
atatt dem beschriebenen parallel aufgenommenen Bild kann 
auch ein Einzelbild (Pestbild) als Hintergrund verwendet 
werden oder beispielsweiae auch ein computergeneriertes 
Bild bzw. Bildsequenz. 
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In bevorzugter Ausgestaltung der Erfindung wird zur Ermitt- 
lung der zuordnung eines Elementes eines Kamerabilddaten- 
satzes zu dem Objektdatensatz oder dem Hintergrunddatensatz 
ein Vergleich der Datensatze von zu einem unterschiedlichen 
Zeitpunkt innerhalb einer Wiedergabef requenz aufgenommenen 
Kamerabildern durchgef uhrt . Betragt die Aufnahmef requenz 
beispielsweise das Dreifache der spateren Wiedergabef re- 
quenz, so werden wahrend einer Wiedergabef requenz, d.h. in- 
nerhalb einer der Wiedergabef requenz entsprechenden Peri- 
ode, drei Kamerabilder aufgenommen. Diese drei Bilder wer- 
den zur Identif izierung eines beliebigen Elementes im Kame- 
rabild ale Objekt oder Hintergrund miteinander verglichen. 
Der Vergleich erfolgt vorteilhaf cerweise paarweise. So wird 
beispielsweise das erste Kamerabild dieser Abfolge von drei 
Bildern zunachst mit dem zweiten Bild und anschlie&end mit 
dem dritten Bild verglichen, und zuletzt wird das zweite 
Bild mit dem dritten Bild verglichen. Urn das Verfahren 6ko~ 
nomischer zu gestalten, kann der Vergleich schrittweiee 
durchgefuhrt werden, wobei nachgeordnete Vergleichsschritte 
nur durchgefuhrt werden, wenn die davor liegenden Ver- 
gleichsschritte noch kein eindeutiges Ergebnis liefern, 
d.h. keine eindeutige Einordnung dee Kamerabildelements als 
Objekt oder Hintergrund zulassen. 

In besonders bevorzugter Ausgestaltung ist der Vergleich 
eine Subtraktion von Elementen gleicher Koordinaten oder 
Bereiche der Kamerabilddatensatze, wobei die miteinander zu 
vergleichenden Elemente der Kamerabilddatensatze einzelne 
Pixel oder aber auch Pixelbereiche sein konnen. Als beson- 
ders vorteilhaft erweist sich ein Vergleich von Pixelberei- 
chen, da das Verfahren dann schneller durchgef uhrt werden 
kann. Hier bietet es sich an, zunachst groCere Pixelberei- 
che auszuwahlen, urn diese dann gegebenenf alls schrittweiee 
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in Unterbereiche zu unterteilen. Das erf indungsgema&e Ver- 
fahren eroffnet auch die Moglichkeit nicht nur zweidimen- 
sionale Pixelbereiche , sondern auch n-dimensionale Pixelbe- 
reiche miteinander zu vergleichen. 

Wie bereits vorstehend erwahnt, kann das erf indungsgemafie 
verf ahren bei beliebigen Auf nahmef requenzen bis zu mehreren 
tausend Bildern pro Sekunde durchgefuhrt werden, Je hoher 
die Aufnahmef requenz, desto gr66er ist die Anzahl der in- 
nerhalb einer Wiedergabeperiode aufgenornmenen Bilder mit 
unterschiedlichen Hintergrundzustanden (insbesondere Hin- 
tergrundhelligkeiten) , wodurch die Vergleichsm6glichkeiten, 
d.h. die Perrnutationen der Vergleichspaare , deutlich zuneh- 
men, Dadurch ist eine bessere Grundlage fur die Zuordnung 
sines Kamerabildelementes zu Hintergrunddatensatz oder Ob- 
jektdatensatz gegeben. 

Die Erfindung eroffnet darfiber hinaue die Moglichkeit, bei 
einer hohen Auf nahmef requenz und gradueller Hintergrundsan- 
derung das Ref lexionsverhalten von Objekten im Kamerabild 
zu bewerten und daraus Ruckschlusse auf den Brechungsindex 
und das Material des Objekts zu Ziehen. Dies wiederum ge- 
etattet die Anpassung betroffener Datensatzelemente des Ob- 
jektdatensatzes an den neuen, dem ursprunglichem Aufnahme- 
hintergrund ersetzenden Ersatzhintergrund. IM Gegensatz zu 
den aus dem Stand der Technik bekannten Verf ahren ist somit 
erf indungsgemaS nicht nur eine Korrektur von Reflexionen 
(und Schatten) moglich, sondem auch deren Auswertung, urn 
die Erkennung von Objekt- oder Hintergrundzugehdrigkeit ei- 
nes Bildelemente oder die Anpassung des Bildes bzw, Objek- 
tes an einen eingesetzten Hintergrund zu ermoglichen. Somit 
konnen erf indungsgemafi Schatten und/oder Reflexionen auf 
dem Objekt bzw, dem Hintergrund erkannt und je nach Anwen- 
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dung oder Wunsch des Benuczers unterdrtickt oder in anderer 
Art und Weise angepafit und verarbeitet werden. 

Vorzugsweise erfolgt die die Durchfuhrung des erf indungsge- 
mafien Verfahrens unter Einsatz eines neuronalen Netzes oder 
anderer Methoden der sogenannten Kunstlichen Intelligent 
(KI) . Damit wird eine besonders gute Erkennung und 2uord- 
nung der Bildelemente zu Objekt, Hintergrund, Spiegelung, 
Schatten, etc. erreicht. 

SchlieSlich eroffnet die Erfindung die Moglichkeit, die Ka- 
merabilddatensatze nicht nur auf eine Zuordnung im zweidi- 
mensionalen Bereich (Objekt- und Hintergrundzugehorigkeit ) 
zu untersuchen/ sondern auch weitere Inf ormationen tiber das 
Objekt bzw. den Hintergrund, wie beispielsweise die Ge- 
schwindigkeit u*a,, zu erhalten* Dies wiederum lafit Rtick- 
schliisse auf dreidimensionale Daten des Kamerabilddatensat- 
zes (Abstand von der Kamera etc.) zu, so daS die Erfindung 
nicht nur fiir die zweidimensionale, sondern auch ftir die 
mehrdimensionale Bilddatenverarbeitung geeignet ist. 

Weiterhin ale vorteilhaft erweist es sich, den Auf nahmehin- 
tergrund wahrend der Aufnahme nur teilweise zu andern. 

Zur Durchfuhrung des erf indungsgemafien Verfahrens werden 
vorzugsweise folien- oder scheibenartige Eletnente verwen- 
det, die gezielt sehr schnell optisch beeinfluSbar sind, 
d*h, deren Farbe und/oder Helligkeit und/bder Sattigung in 
sehr kurzer zeit von einem ereten vorgegebenen auf einen 
zweiten vorgegebenen Wert umgeschaltet werden kann. Hierzu 
eignen sich insbesondere elektx-olurnineezente oder auch 
elektrochrominante flachige Elemente, wie sie aus dem Stand 
der Technik bereits bekannt sind. 
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Weitere Vorteile und Ausgestal tungen der Erfindung ergeben 
sich aus der Beschreibung und der beiliegenden Zeichnung. 

Es versteht sich, dafi die vorstehend genannten und die 
nachetehend noch zu erlauternden Merkmale nicht nur in der 
jeweils angegebenen Kombination, eondern auch in anderen 
Kombinationen oder in Alleinstellung verwendbar sind, ohne 
den Rahmen der vorliegenden Erfindung zu verlassen. 

Die Erfindung ist anhand eines Aus f iihrungsbei spiel es in der 
Zeichnung schematisch dargestellt und wird im folgenden un- 
ter Bezugnahme auf die Zeichnung ausfuhrlich beschrieben. 

Figur 1 zeigt ein Blockschaltbild zur Veranschaulichung 
der Erfindung, 

Figur 2 zeigt ein Blockschaltbild zur Veranschaulichung 
einer in der vorliegenden Erfindung zu verwenden- 
den Auswerteeinheit . 

Zentraler Beetandteil der Erfindung ist die Aufnahme eines 
Oder rnehrerer Objekte (Objekte 1 bis m) durch eine oder 
mehrere Kameras (Kameras 1 bis n) , wobei sich die Objekte 
vor einera Hintergrund befinden. Der Hintergrund ist erfin- 
dungsgemaS hochfreguent beeinflufibar bzw. anderbar. Die An- 
derungsfrequenz ist dabei auf eine Auf nahmef requenz der 
aufnehmenden Kamera(s) abgestimmt . Die Anderung des Hinter- 
grunds erfolgt insbesondere bezuglich desaen Farbe und/oder 
Helligkeit und/oder Sattigung. 

Die beeinf lufibaren Parameter des Hintergrunds sind somit 
neben der Anderungsf requenz die Farbe, die Helligkeit 
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und/oder die S&ttigung. Bei der bzw. den Kamera(s) ist der 
beeinf lufibare Parameter neben den tiblichen Kameraparametern 
die Aufnahmef requenz, gegebenenf alls eingeschrankt auf ei- 
nen def inierbaren Bildbereich x*y, Diese Parameter werden 
von der Auswerteeinheit gesteuert, wobei auch eine direkte 
Steuerung, insbesondere zum Abgleich der Kamera(s) auf den 
Hintergrund, moglich ist. 

Mit den Kameras 1 bis n werden die durch den Hintergrund 
eingeschlossenen, d.h. von dem Hintergrund umgebenen Objek- 
te 1 bis m aufgenommen, wobei die Auf nahmef requenz der Ka- 
meras ein Vielf aches der spateren Wiedergabef requenz ist. 
Als Ergebnis liegen Az Kamerabilder von n Kameras pro 
Zeiteinheit z vor, die der in Figur 2 n&her dargestellten 
Auswerteeinheit zugeftihrt werden. 

In der in Figur 2 dargestellten Auswerteeinheit ist fur je- 
de der 1 bis n Kameras eine eigene kamerabezogene Auswerte- 
einheit vorgesehen, der jeweils die Daten der Az Kamerabil- 
der zugeftihrt werden* Unter Berucksichtigung der ebenfalls 
jeder kamerabezogenen Auswerteeinheit zugeftihrten Zusatzpa- 
rameter, wie sie vorstehend beschrieben sind, werden in je- 
der kamerabezogenen Auswerteeinheit das bzw. die Objekte 
von dem Hintergrund getrennt, indem eine Identif ikation und 
eine Zuordnung einzelner Kamerabildelemente (Pixel Oder Pi- 
xelbereiche) zu „Objekt n Oder „Hintergrund w erf olgt . Nach 
erfolgter Zuordnung werden die als dem Hintergrund zugehd- 
rigen Bildelemente entfernt und durch Bildelemente eines 
Ersatzhintergrunds ersetzt. In einfachen Anwendungen han- 
delt es sich bei diesem Ersatzhintergrund urn ein stehendes 
unveranderlichee Bild, beispielsweise die Wetterkarte. Je- 
doch sind auch komplexere Anwendungen moglich und werden 
durch die vorliegende Erf indung erleichtert, wie beispiels- 
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weise das Einblenden von separat auf genommenen Oder per 
Computer erzeugten laufenden Bildern als Hintergrund bei 
Studioauf nahmen. Der Ablauf der Identif ikation wurde vor- 
stehend bereits beschrieben. 



Die von den einzelnen kamerabezogenen Auswerteeinheiten er- 
zeugten Bilddaten werden dann einer zentralen aufnahmezeit- 
punktbezogenen Auswerteeinheit zugefuhrt, die einen Puffer 
zur Auswertung mehrerer Zeiteinheiten umfafit und zur Syn- 
chrony sierung und Abstimmung der von den kamerabezogenen 
Auswerteeinheiten gelieferten Daten dient . Die Verwendung 
mehrerer Kameras gestattet die Erzeugung von Bilddaten, die 
zu einer von einem Betrachter aus unterschiedlichen Per- 
spektiven betrachtbaren „dreidimensionalen H Wiedergabe ge- 
eignet sind. Ein derartiges Aufnahme- und Wiedergabe verf ah- 
ren ist beispielsweise in der deutschen Patentanmeldung 199 
13 853.2 beschrieben. 

Die von der zentralen aufnahmezeitpunktbezogenen Auswerte- 
einheit erzeugten Daten werden aus der Auswerteeinheit aus- 
gegeben, so dafi als Ergebnis (vgl . Pigur 1) ein Einzelbild 

(Frame) vorliegt, in dem der Hintergrund und das Objekt 
voneinander separiert sind. Eine typische Wiedergabef re- 
quenz der erzeugten Frames betr&gt ca. 2 5 bis 3 0 sec* 1 

(Fernsehbildfrequenz) . 
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Patentanspruche 



1. Verfahren zur Bilddatenverarbeitung , bei dem eine 
Trennung von einen Bildvordergrund darstellenden Objektda- 
ter. eines Bilddatensatzes (Objektdatensatz) von einem einen 
Bildhintergrund darstellenden Datensatz (Hintergrunddaten- 
satz) erf olgt , bei dem ein von einer Kamera auf zunehmender 
Hintergrund in einer auf eine Auf nahmef requenz der aufneh- 
menden Kamera abgestimmten Prequenz geandert wird. 

2. Verfahren nach Anspruch 1, bei dem die Anderung des 
Hintergrunds durch Umschalten zwischen zwei Zustanden er- 
folgt - 

3. Verfahren nach Anspruch 1, bei dem die Anderung des 
Hintergrunds graduell zwischen zwei Zustanden mit einer 
Vielzahl von Zwischenfcustanden erf olgt . 

4. Verfahren nach einem der Anspruche 1 bis 3/ bei dem 
die Farbe und/oder Helligkeit und/oder Sattigung des Hin- 
tergrunds geandert wird. 

5 . Verfahren nach einem der AnsprOche 1 bis 4 , bei dem 
die Aufnahmefrequenz der Kamera ein Vielf aches der Wieder- 
gabefrequenz ist. 

6. Verfahren nach Anspruch 5, bei dem die Aufnahmefre- 
quenz das Doppelte der ublichen Fernsehbildf requenz ist. 
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7. Verfahren nach einem der Anspruche 1 bis 6, bei dern 
zur Ermittlung der Zuordnung eines Elementes eines Kamera- 
bilddatensatzes zu dem Objektdatensatz oder dem Hinter- 
grunddatensatz ein Vergleich der Datensatze von zu einem 
unterschiedlichem Zeitpunkt innerhalb einer Wiedergabe fre- 
quent aufgenommenen Katnerabildern durchgefuhrt wird. 

8. Verfahren nach Anspruch 7, bei dem der Vergleich eine 
Subtraktion von Elamenten gleicher Koordinaten oder Berei- 
che der Karnerabilddatensatze beinhaltet. 

9. Verfahren nach Anspruch 7 oder 8, bei dem die mitein- 
ander verglichenen Eletnente der Karnerabilddatensatze Pixel 
sind. 

10. Verfahren nach Anspruch 8 oder 9, bei dem die mitein- 
ander vergXichenen Elemente der Karnerabilddatensatze mehr 
dimensionale Pixelbereiche sind, 

11. Verfahren nach einem der Anspruche 1 bis 6, bei dem 
zur Erkennung und Zuordnung der Elemente der Karnerabild- 
datensatze Methoden der KCinstlichen Intelligenz, wie neuro- 
nale Netze, verwendet werden- 

12. Verfahren nach einem der Anspruche 6 bis 11 , bei dem 
die als dem Hintergrunddatensatz zugehorig identif izierten 
Elemente des Kamerabilddatensatzes durch Elemente entspre- 
chender Koordinaten oder Bereiche eines Datensatzes eines 
Ersatzhintergrunds ersetzt werden, 

13 . Kameraauf nahmesystem, insbesondere zur Durchf uhrung 
des Verfahrens nach einem der Anspruche 1 bis 12, mit min- 
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destens einer Kamera zur Aufnahme eines vor einem Hinter- 
grund befindlichen Objekts, wobei eine Anderung des Hinter- 
grunds in einer auf eine Auf nahmef requenz der aufnehmenden 
Kamera abgestimmten Frequenz erf olgt . 

14. Kameraaufnahmesystem nach Anspruch 13, bei dem ale 
Hintergrund ein optisch definiert beeinf lullbares folien- 
oder scheibenartiges Element vorgesehen ist. 

15. Kameraauf nahme system nach Anspruch 14, bei dem das Hin- 
tergrundelement ein elektrolumineezentes oder elektrochro- 
minantes flachiges Element ist. 
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